CM记录-HDFS清理垃圾回收站
HDFS数据块所在存储的目录满了的解决方法 1.增加磁盘空间 2.删除回收站 hadoop dfs -du -h 查看各个HDFS空间占用情况 hadoop dfs -expunge ...
花费 5 ms
CM记录-配置Hive on Spark
默认hive on spark是禁用的，需要在Cloudera Manager中启用。1.登录CM界面，打开hive服务。2.单击 配置标签，查找enable hive on spark属性。3.勾选 ...
CM记录-CDH故障修复处理记录
CDH大数据集群修复记录 1）cm web打不开，查看监听7180端口产生了很多进程，于是kill进程；重启cloudera-cmf-server服务，几秒钟就挂了，查看cloudera-scm-s ...
CM记录-Hadoop参数调优
1.HDFS调优 a.设置合理的块大小（dfs.block.size） b.将中间结果目录设置为分布在多个磁盘以提升写入速度（mapred.local.dir） c.设置DataNode处理RP ...